Bà có hai người em trai. Người thứ nhất là liệt sĩ Phan Hữu Khải (1953-1972), nhân vật nam chính trong bài thơ "Hương thầm" của bà. Người thứ hai là Phan Hữu Tuấn (1955-), Trung tướng Công an nhân dân Việt Nam, nguyên Phó Tổng cục trưởng Tổng cục Tình báo, Bộ Công an Việt Nam. Ngày 31/7/2018, TAND TP Hà Nội tuyên phạt Phan Hữu Tuấn 7 năm tù về tội nêu về tội "Cố ý làm lộ bí mật Nhà nước". Chiều 30/1/2019, TAND Hà Nội xử phạt Phan Hữu Tuấn thêm 5 năm tù về tội Lợi dụng chức vụ, quyền hạn trong khi thi hành công vụ. Bị cáo này tổng lĩnh 12 năm tù.[2][3]